شرکت NVIDIA مدلي به نام NVEagle را عرضه کرده که یک مدل پیشرفته برای ترکیب بینایی و زبان است. این مدل در سه نسخه 7B، 13B و 13B بهینهسازیشده برای چت ارائه شده است. این مدل از روشهای مختلفی برای ادغام خروجیهای انکودرهای تصویر و استفاده از متخصصین مختلف (MoE) بهره میبرد.
در این مدل، برای ادغام تخصصها، خروجیهای انکودرهای تصویر از طریق concatenation به هم متصل میشوند و سپس مرحلهای به نام "pre-alignment" اجرا میشود که در آن متخصصین با انکودر متن ثابت بهینهسازی میشوند. سپس متخصصین و دیکودر فریز شده و تنها لایه پروجکشن آموزش داده میشود، و در نهایت همه اجزا برای بهینهسازی نظارتی باز میشوند.
شرکت NVIDIA مدلي به نام NVEagle را عرضه کرده که یک مدل پیشرفته برای ترکیب بینایی و زبان است. این مدل در سه نسخه 7B، 13B و 13B بهینهسازیشده برای چت ارائه شده است. این مدل از روشهای مختلفی برای ادغام خروجیهای انکودرهای تصویر و استفاده از متخصصین مختلف (MoE) بهره میبرد.
در این مدل، برای ادغام تخصصها، خروجیهای انکودرهای تصویر از طریق concatenation به هم متصل میشوند و سپس مرحلهای به نام "pre-alignment" اجرا میشود که در آن متخصصین با انکودر متن ثابت بهینهسازی میشوند. سپس متخصصین و دیکودر فریز شده و تنها لایه پروجکشن آموزش داده میشود، و در نهایت همه اجزا برای بهینهسازی نظارتی باز میشوند.
Spiking bond yields driving sharp losses in tech stocks
A spike in interest rates since the start of the year has accelerated a rotation out of high-growth technology stocks and into value stocks poised to benefit from a reopening of the economy. The Nasdaq has fallen more than 10% over the past month as the Dow has soared to record highs, with a spike in the 10-year US Treasury yield acting as the main catalyst. It recently surged to a cycle high of more than 1.60% after starting the year below 1%. But according to Jim Paulsen, the Leuthold Group's chief investment strategist, rising interest rates do not represent a long-term threat to the stock market. Paulsen expects the 10-year yield to cross 2% by the end of the year.
A spike in interest rates and its impact on the stock market depends on the economic backdrop, according to Paulsen. Rising interest rates amid a strengthening economy "may prove no challenge at all for stocks," Paulsen said.
Newly uncovered hack campaign in Telegram
The campaign, which security firm Check Point has named Rampant Kitten, comprises two main components, one for Windows and the other for Android. Rampant Kitten’s objective is to steal Telegram messages, passwords, and two-factor authentication codes sent by SMS and then also take screenshots and record sounds within earshot of an infected phone, the researchers said in a post published on Friday.